Het kasteel van Soumoy, dat onmiskenbaar deel uit maakt van het erfgoed van de streek rond Philippeville met de meren van Eau d’Heure, werd waarschijnlijk opgericht door Jacques de Robaulx in de eerste helft van de 17de eeuw. Het werd gebouwd in kubusvorm, ingesloten tussen twee vierkante torens.
De verschillende gebouwen hebben allemaal een leistenen dak met erbovenop een bolvormige piek. Het geheel is hoofdzakelijk opgetrokken in gewitte baksteen. Rond het kasteel liggen stallen, twee hoeves met elk een apart plein en een oude stenen woning, waardoor de site een nobele indruk geeft. De kleine pittoreske Sint-Andrieskerk, vandaag parochiaal, is de oude kapel van het kasteel. De bijgebouwen van het kasteel deden een tijd dienst als gastenverblijf en receptieruimte. Ondertussen is het kasteel te koop gezet en wacht het een nieuwe toekomst.